神经网络补充 August 17, 2025 1762 words • 9 min read 生物神经元具有如下的结构: - 树突 (Dendrites):像天线一样,负责**从其他神经元那里接收输入信号**。 - 轴突 (Axon):是一条单一的输出线,负责**将处理后的信号传递出去**。 - 突触 (Synapses):是轴突的末梢和其他神经元树突的连接点,是**信号传递的关键节点**。... #NLP#Deep Learning
神经网络梯度计算 August 14, 2025 4342 words • 22 min read > 本文章是对 [Gradient Notes](https://web. edu/class/cs224n/readings/gradient-notes... #NLP#Deep Learning
深度学习自然语言处理 August 13, 2025 4039 words • 21 min read 在之前的讨论中,我们已经明确了非线性分类器的必要性,因为**大多数数据并不是线性可分的**,因此使用线性分类器的分类性能会受到限制。 神经网络是一类**具有非线性决策边界的分类器**。 神经元是一个通用的计算单元,它接受 $n$ 个输入并产生一个输出。 一个比较常见的神经元类型是 $Sigmoid$ 逻辑单元,神经元关联着一个 $n$ 维权重向量 $w$ 和一个标量偏置 $b$,其输出为:... #NLP#Deep Learning
Word2vec模型 August 12, 2025 2252 words • 12 min read 一个词(如 `tea`)是一个**符号/能指 (Signifier)**,它代表了现实或想象世界中的某个**实体/所指 (Signified)**。词义是极其复杂的,它源于人类在世界中沟通和实现目标的意图。 最简单的表示方法是将每个词视为独立的实体。在向量空间中,这通常通过 **one-hot 向量(或称标准基向量)** 来实现。 例如,在一个词汇表 $V$ 中: $$... #NLP#Deep Learning#Word2vec